A Zhihu AI lançou o CritiqueLLM, um modelo de pontuação de alta qualidade e baixo custo. Os indicadores tradicionais de avaliação, como BLEU e ROUGE, carecem de compreensão semântica geral. O CritiqueLLM propõe um modelo de avaliação de qualidade de texto explicável e escalável. Em 8 tarefas comuns, o CritiqueLLM supera outros modelos. O CritiqueLLM utiliza aumento de consultas de usuários, coleta de dados de avaliação com texto de referência, reescrita de dados de avaliação sem texto de referência e treinamento de modelo.